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(57) Abstract: According to the invention, navigational information for a vehicle is 
displayed intuitively and in an easily comprehensible manner in the form of a vir- 
tual pilot vehicle, superimposed on an image of the vehicle environment. The display 
mode and/or position and/or orientation and/or size of the virtual pilot vehicle are 
determined for example in accordance with the route information, speed, reference 
points for a recommended route, position and orientation of the vehicle or the camera 
that records the vehicle environment. 

(57) Zusammenfassung: Die Erfindung besteht im wesentlich darin, dass Navigati- 
onsinformationen fur ein Fahrzeug in Form eines virtuellen Lotsenfahrzeugs intuitiv 
und leicht verstandlich mit einem Bild der Fahrzeugumgebung uberlagert angezeigt 
werden, wobei die Darstellungsart und/oder die Position und/oder die Orientierung und/oder GroBe des virtuellen Lotsenfahrzeug 
bspw. in Abhangigkeit der Routeninformation, Fahrgeschwindigkeit, der Stiitzpunkte fur eine empfohlene Route, der Position und 
Orientierung des Fahrzeugs bzw. der Kamera zur Erfassung der Fahrzeugumgebung erfolgen. 
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Beschreibung 

Verfahren und Vorrichtung zur Anzeige von Navigations- 
inf ormationen ftir ein Fahrzeug 

Die Erfindung betrifft ein Verfahren und eine Vorrichtung, 
bei dem/der Navigationsinf ormationen fur ein Fahrzeug mit 
einem Bild der Fahrzeugumgebung uberlagert werden, wobei 
diese bildliche Darstellung einer Navigations-Darstellung 
mittels einer perspektivischen Transformation trans formiert 
wird. 

Ein solches Verfahren bzw. eine solche Vorrichtung ist aus 
der europaischen Patentanmeldung EP 0 406 946 Al bekannt . 

Daruber hinaus gibt es heutige Navigationssysteme, die dem 
Fahrer im Kreuzungsbereich den empf ohlenen Weg mittels 
Piktogrammen anzeigen und einen akustischen Hinweis, z.B. 
„2 . StraSe nach rechts abbiegen" oder „im Kreisel geradeaus 
fahren M , abgeben. Manche Systeme zeigen auch zusatzlich den 
empf ohlenen Weg in einer Landkarte an. 

Unter Fahrzeug werden im Folgenden nicht nur Landf ahrzeuge, 
sondern auch Wasserf ahrzeuge und Flugzeuge verstanden. 

Die der Erfindung zu Grunde liegende Aufgabe besteht nun 
darin, ein Verfahren und eine Vorrichtung zur Anzeige von 
Navigationsinf ormationen fur ein Fahrzeug derart anzugeben, 
dass einem Fahrzeuglenker auf intuitiv leicht verstandliche 
Weise der Weg zu einem bestimmten Ziel durch den 
StraSenverkehr gewiesen wird. 

Diese Aufgabe wird hinsichtlich des Verfahrens durch die 
Merkmale des Patentanspruchs 1 und hinsichtlich der Anordnung 
durch die Merkmale des Patentanspruchs 10 erf indungsgemafi 
gelost . 
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Die weiteren Ansprtiche betreffen bevorzugte Ausgestaltungen 
des erf indungsgemaJSen Verf ahrens . 

Die Erf indung wird nachfolgend anhand von in den Zeichnungen 
dargestellten Ausf uhrungsbei spiel en erlautert. Dabei zeigen 
die 

Figuren 1, 2, 3a, 3b und 4: Darstellungsarten von 

Navigationsinf ormationen mit Hilfe eines 
virtuellen Lotsenfahrzeugs und 

Figuren 5a und 5b: Darstellung zur Erlauterung der 

Positionierung des virtuellen 
Lotsenfahrzeugs , 

Die Erf indung besteht im wesentlich darin, dass 
Navigationsinf ormationen fur ein Fahrzeug in Form eines 
virtuellen Lotsenfahrzeugs intuitiv und leicht verstandlich 
mit einem Bild der Fahrzeugumgebung uberlagert angezeigt 
werden, wobei die Darstellungsart und/oder die Position 
und/oder die Orientierung und/oder Grofie des virtuellen 
Lotsenf ahrzeug bspw. in Abhangigkeit der Routeninf ormation, 
Fahrgeschwindigkeit, der Stutzpunkte fiir eine empfohlene 
Route, der Position und Orientierung des Fahrzeugs bzw. der 
Kamera zur Erfassung der Fahrzeugumgebung erfolgen. 

In einer bevorzugten Ausf iihrungs form der Erf indung werden die 
Navigationsinformationen mit Hilfe eines virtuellen Lotsen in 
Form eines stilisierten Fahrzeugs dargestellt, das scheinbar 
vor dem Fahrer auf der empfohlenen Route herfahrt. Durch 
seine virtuellen Fahrmanover macht das virtuelle 
Lotsenfahrzeug den Fahrer auf bevorstehende reale Fahrmanover 
aufmerksam. 

Durch sein Verhalten kann das virtuelle Lotsenfahrzeug dem 
Fahrer Routenempf ehlungen oder andere Verhaltensempf ehlungen 
intuitiv und leicht verstandlich anzeigen. So wird bspw. 
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1. eine Empfehlung „nach rechts abbiegen" oder „nach links 
abbiegen", wie in Figur 1 gezeigt, durch ein 
virtuelles Lotsenf ahrzeug mit einem entsprechend blinkendem 
Richtungsanzeiger dargestellt; 

2 . eine Empfehlung „nach links in eine bestimmte StraSe 
einbiegen" oder „nach rechts in eine bestimmte StraSe 
einbiegen" , wie in Figur 2 gezeigt, durch entsprechend 
einbiegendes virtuelles Lotsenf ahrzeug dargestellt; 

3. eine Empfehlung „vorsichtig fahren wegen einer 
Gefahrenquelle" , bspw. Stau, Baustelle, Geisterf ahrer o. a., 
auf den Fahrer zukommend, wie in Figur 3a dargestellt, durch 
ein virtuelles Lotsenf ahrzeug mit eingeschalteter 
Warnblinkanlage dargestellt. Zusatzlich kann optional, wie in 
Figur 3b gezeigt, uber Text oder Piktogramm weitere 
Information auf einer Tafel an dem virtuellen Lotsenf ahrzeug 
angezeigt werden; 

4. eine Empfehlung „Geschwindigkeit reduzieren, wie in Figur 
4 dargestellt, dadurch angezeigt, dass die Bremslichter des 
virtuellen Lotsenf ahrzeugs aufleuchten, wenn der Fahrer zu 
schnell fahrt, z.B. aufgrund einer bestehenden 
Geschwindigkeitsbeschrankung oder angesichts einer kommenden 
engen Kurve; 

5- eine Empfehlung „Mindestabstand zum vorausf ahrenden 
Fahrzeug, entsprechend der aktuellen Geschwindigkeit, 
einhalten", dadurch angezeigt, dass ein virtuelles 
Lotsenfahrzeug so auf der StraSe platziert wird, dass es 
scheinbar genau im aktuell erf orderlichen Mindestabstand vor 
dem Fahrer herfahrt. Befindet sich nun ein reales Fahrzeug 
zwischen dem Fahrer und dem virtuellen Fahrzeug, so ist der 
Fahrer zu dicht auf das reale vorausf ahrende Fahrzeug 
aufgef ahren. 
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Dabei wird das virtuelle Lotsenf ahrzeug in ein Videobild der 
realen Szene vor dem Fahrzeug des Fahrers eingebettet und auf 
einem Display angezeigt oder vor dem Fahrer in die 
Frontscheibe seines Fahrzeugs projiziert. 

Da sich das virtuelle Lotsenf ahrzeug im Grunde wie ein reales 
den Fahrer fuhrendes Fahrzeug verhalt sind die Empf ehlungen 
und Anweisungen, die der virtuelle Lotse visualisiert , fur 
den Fahrer intuitiv verstandlich . 

Das Lotsenfahrzeug fahrt scheinbar in einer gewissen 
Entfernung, dem Lotsenabstand d, vor dem eigentlichen 
Fahrzeug her. Diese Entfernung ist vorteilhaf ter Weise 
abhangig von der aktuellen Geschwindigkeit des Fahrzeug und 
gegebenenf alls von der an der aktuellen Stelle zulassigen 
oder empfohlenen Hochstgeschwindigkeit. 

Dieser Lotsenabstand wird bspw. f olgendermafien ermittelt: 
Gegeben seien die Fahrzeuggeschwindigkeit v und eventuell 
eine Hochstgeschwindigkeit v 0 . 

Gesucht ist der virtuelle Lotsenabstand d . 

Ist keine Hochstgeschwindigkeit gegeben oder ist v<v 0 , so 



Ist v>v 0 , wird dem Fahrer empfohlen, die Geschwindigkeit zu 
reduzieren. Dies wird signalisiert durch ein Verkurzen des 
Abstandes , d . h . 



Die GroSe c kann hierbei fest, z. B. c=2 , gewahlt werden oder 
als Funktion des Strafientyps begriffen werden, z.B. c=2 im 
Stadtverkehr, c=5 auf Lands traSen f c=6 auf Autobahnen. 
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Femer wird in einer bevorzugten Ausgestaltung der Erfindung 
die Lotsenposition in Weltkoordinaten wie folgt bestimmt: 

Gegeben seien die Fahrzeugposition P in Weltkoordinaten, 
z.B. gemessen uber GPS, die Information fiber die durch das 
Navigationssystem empfohlene Route in Form von n 
Stiitzpunkten ^und die Wegstrecke d , die der Lotse vor dem 
Fahrzeug auf der empfohlenen Route ff herfahrt w . 
Gesucht ist die Lotsenposition L in Weltkoordinaten und die 
Lotsenorientierung 6 in Weltkoordinaten, wobei O den 
Einheitsvektor in Blickrichtung des virtuellen 
Lotsenfahrzeugs bildet. 

Urn die Lotsenposition auf der Route zu bes tinmen, muss 
zunachst die Position des Fahrzeugs auf der Route bestimmt 
werden. Dazu wird, wie in Figur 5a und 5b dargestellt, die 
gemessene Position Pdes Fahrzeugs auf die Route projiziert. 

Ein Weg dies zu leisten, ist den Punkt P 0 = (l-t 0 )R io +t 0 R io+l auf 
der Route zu suchen, der den minimalen Abstand im Sinne 
kleinster Quadrate zu P hat, d.h. 

f(t,i) = \p -((1-0*,+* ^ +1 )| 2 mit re[0,l[ und ie{l,...,n} hat ein 
absolutes Minimum an der Stelle t = t 0 und i = f 0 . Die 
Lotsenposition L ist dann gegeben durch £ = (1-*,)/^ + t } R iH , 
wobei fjund i x bestimmt sind durch 

d(v) = \L - /?,, | + \P 0 - ^ o+1 |+ § - *,| . 



Die Lotsenorientierung ist nun gegeben durch 



6=~L 

N 



mit 
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Aus der Lotsenposition und der Lotsenorientierung wird nun 
durch eine perspektivische Transformation eine 2- 
dimensionalen Lotsendarstellung zur Uberlagerung mit dem 
Videobild bzw. zur Projektion in die Windschutzscheibe 
ermittelt : 

Fall 1:' Uberlagerung mit einem Videobild 

Gegeben seien die Lotsenposition L , die Lotsenorientierung 
O, die Parameter der realen Kamera und eine 3-dimensionale 
Beschreibung des Lotsenmodells. 

Gesucht ist die 2-dimensionale Lotsendarstellung. 
Aus L und O kann die Lage des Lotsenmodells in 
Weltkoordinaten berechnet werden. Aus den Parametern einer 
Kamera zur Aufzeichnung der Fahrzeugumgebung werden die 
Projektionsabbildungen errechnet und die Model lbeschreibung 
des Lotsenf ahrzeugs wird in die darstellende Ebene 
projiziert . 

Das System ist hierbei mit einer Kamera ausgestattet , die das 
Geschehen vor dem Fahrzeug auf nimmt . In die einzelnen 
Videobilder wird entsprechend der errechnet en Fahrtroute das 
virtuelle Lotsenf ahrzeug eingebettet. Das so erhaltene 
Augmented Reality-Bild wird auf einem Display im Sichtbereich 
des Fahrers angezeigt. (Anhang, Photo 6a) 

Zusatzlich wird bspw. die empfohlene Fahrtroute angezeigt. 
Durch die Fahrtroute wird auch der weitere Weg des virtuellen 
Fahrzeugs visualisiert . ( Anhang, Photo 6b) 

Fall 2: Projektion in die Windschutzscheibe 

Gegeben seien die Lotsenposition L , die Lotsenorientierung 
O, die uber Sensoren ermittelte Position und Blickrichtung 
der Augen des Fahrers und eine 3 -dimensional en Beschreibung 
des Lotsenmodells. 

Gesucht ist die 2-dimensionale Lotsendarstellung. 
Aus L und 6 kann die Lage des Lotsenmodells in 
Weltkoordinaten berechnet werden. Aus den Parametern der 
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Augenposition und -blickrichtung werden die 

Projektionsabbildungen errechnet und die Model lbeschreibung 
des Lotsenf ahrzeugs wird in die darstellende Ebene 
projiziert. 

Hierbei wird bspw. zunachst liber ein Trackingsystem die 
Augenposition des Fahrers ermittelt. tJber "eine 
Projektionseinrichtung wird entsprechend der errechneten 
Fahrtroute das virtuelle Fahrzeug an die entsprechende Stelle 
auf der Frontscheibe projiziert, (Anhang, Photo 6c) 

Zusatzlich wird bspw. die empfohlene Fahrtroute in die 
Frontscheibe projiziert. (Anhang, Photo 6d) 
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Patentanspriiche 

1. Verfahren zur Anzeige von Navigations inf orniationen fur ein 
Fahrzeug, 

bei dem die Navigationsinf ormationen fur ein Fahrzeug in Form 
eines virtuellen Lotsenf ahrzeugs mit einem Bild der 
Fahrzeugamgebung uberlagert angezeigt werden und 
bei dem eine Darstellungsart und/oder eine Position und/oder 
eine Orientierung und/oder GroSe des angezeigten virtuellen 
Lotsenf ahrzeug in Abhangigkeit 

einer Rout en- oder Verhaltensempf ehlung und/oder 

einer Fahrgeschwindigkeit und/oder 

Stiitzpunkten fur eine empfohlene Route und/oder 

einer Position und Orientierung des Fahrzeugs und/oder 

einer Position und Orientierung einer Kamera zur Erfassung 

der Fahrzeugumgebung und/oder 

einer Augenposition und einer Blickrichtung des Fahrers 
erf olgen. 

2 . Verfahren nach Anspruch 1 , 

bei dem eine Routen- oder Verhaltensempf ehlung „nach rechts 
abbiegen u oder „nach links abbiegen" durch ein 
virtuelles Lotsenf ahrzeug mit einem entsprechend blinkendem 
Richtungsanzeiger dargestellt wird. 

3 . Verfahren nach Anspruch 1 oder 2 , 

bei dem eine Routen- oder Verhaltensempf ehlung „nach links 
in eine bestimmte StraSe einbiegen" oder „nach rechts in eine 
bestimmte Strafie einbiegen" durch ein entsprechend 
einbiegendes virtuelles Lotsenf ahrzeug dargestellt wird. 

4. Verfahren nach einem der Anspriiche 1 bis 3, 

bei dem eine Routen- oder Verhaltensempf ehlung „vorsichtig 
fahren wegen einer Gef ahrenquelle M durch ein virtuelles 
Lotsenf ahrzeug mit eingeschalteter Warnblinkanlage 
dargestellt wird. 
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5 . Ver f ahren nach Anspruch 4 , 

bei dem zusatzlich uber Text oder Piktogramm weitere 
Information auf einer Taf el an dem virtuellen Lotsenf ahrzeug 
angezeigt werden. 

6. Ver f ahren nach einem der vorhergehenden Anspriiche, 
bei dem eine Routen- oder Verhaltensempf ehlung 
„Geschwindigkeit reduzieren" dadurch angezeigt wird, dass 
Bremslichter des virtuellen Lotsenf ahrzeugs aufleuchten, wenn 
der Fahrer schneller als eine orts- oder situationsabhangig 
vorgegebene Hochstgeschwindigkeit f ahrt ■ 

7. Verf ahren nach einem der vorhergehenden Anspriiche, 
bei dem eine Routen- oder Verhaltensempf ehlung 
„Mindestabstand zum vorausf ahrenden Fahrzeug, entsprechend 
der aktuellen Fahrgeschwindigkeit , einhalten", dadurch 
angezeigt wird, dass ein virtuelles Lotsenf ahrzeug so auf der 
Darstellung der Strafie platziert wird, dass es scheinbar 
genau im aktuell erf orderlichen Mindestabstand vor dem Fahrer 
herfahrt, wobei ein zu dichtes Auf f ahren dadurch angezeigt 
wird, dass sich im Bild ein reales Fahrzeug zwischen dem 
Fahrer und dem virtuellen Fahrzeug befindet. 

8. Verf ahren nach einem der vorhergehenden Anspriiche, 

bei dem eine Lotsenposition (L) und eine Lotsenorientierung 
(0) in Abhangigkeit von Stiitzpunkten (R) fur eine empfohlene 
Route sowie in Abhangigkeit der aktuellen Position (P) und 
Fahrgeschwindigkeit des Fahrzeugs ermittelt wird. 

9. Verf ahren nach einem der vorhergehenden Anspriiche, 
bei dem entsprechend der Lotsenposition und der 
Lotsenorientierung ein Modell des Lotsenf ahrzeugs im 
dreidimensionalen Raum gebildet wird und 

bei dem aus diesem Modell eine zweidimensionale Darstellung 
errechnet wird, die mit dem vom Fahrer wahrgenommenen Bild 
der Fahrzeugumgebung iiberlagert wird. 
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10. Vorrichtung zur Anzeige von Navigationsinf ormationen fur 
ein Fahrzeug, 

bei der eine Einrichtung zur Uberlagerung von 
Navigationsinf ormationen fur ein Fahrzeug in Form eines 
virtuellen Lotsenf ahrzeugs mit einem Bild der 
Fahrzeugumgebung derart vorhanden ist, dass eine 
Darstellungsart und/oder eine Position und/oder eine 
Orientierung und/oder GroSe des virtuellen Lotsenf ahrzeug in 
Abhangigkeit einer Routen- oder Verhaltensempf ehlung und/oder 
der Fahrgeschwindigkeit und/oder Stiitzpunkten ftir eine 
empfohlene Route und/oder einer Position des Fahrzeugs 
und/oder einer Orientierung des Fahrzeugs und/oder einer 
Position der Kamera zur Erf as sung der Fahrzeugumgebung 
und/oder einer Orientierung der Kamera zur Erfassung der 
Fahrzeugumgebung erfolgen. 




FIG 4 
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